回答:这个太范化了吧。大数据架构选择的方案就有很多，海量数据的即席查询本省就是业内目前的痛点，暂时没有太好的解决方案，kylin等框架也只是一个折中方案，如果你不是要求海量数据分析的秒级响应的话sparkSql、presto等都是不错的方案，分钟级别可以返回。
Paul_King
|
681人阅读
回答:首先解释一下什么是本地储存，什么是分布式存储，分布式网络存储是通过网络。采用可扩展的网络系统结构，建立多台存储服务器分担和分散存储负荷，（例如像微信淘宝等。在多个地区建立服务器集群）利用位置服务器位置地区存储信息，它的特点是提高了系统的可靠性、可用性和存取效率快速的吞吐量，还易于扩展，通过不断的增加来调节。也可将所有文件存储到不同的办公室或者企业集团所有的电脑内，这种叫做小的分布式存储。通俗的解释...
Scliang
|
827人阅读
回答:对象存储，通常与块存储、文件存储并提。按照存储接口的不同，存储的应用场景可分为对象存储、块存储、文件存储三种。块存储的主要操作对象是磁盘，DAS和SAN都是块存储类型。文件存储的主要操作对象是文件和文件夹，对应NAS产品。对象存储主要操作对象是Object，兼具了SAN高速直接访问磁盘和NAS分布式共享特点。采用键值存储，将数据读写通路和元数据分离，基于对象存储设备构建存储系统。分布式存储，通常与...
CKJOKER
|
1013人阅读
回答:对象存储，通常与块存储、文件存储并提。按照存储接口的不同，存储的应用场景可分为对象存储、块存储、文件存储三种。块存储的主要操作对象是磁盘，DAS和SAN都是块存储类型。文件存储的主要操作对象是文件和文件夹，对应NAS产品。对象存储主要操作对象是Object，兼具了SAN高速直接访问磁盘和NAS分布式共享特点。采用键值存储，将数据读写通路和元数据分离，基于对象存储设备构建存储系统。分布式存储，通常与...
Tangpj
|
3678人阅读
回答:简要来说，在性能和价格方面，相对SAN存储，分布式存储都存在优势。性能SAN存储：通常采用双控制器架构方式，为前端服务器配置两台交换机进行连接。这种架构方式具有一些明显的弊端：前端服务器成为整个存储性能的瓶颈。前端服务器的对外服务能力会制约存储的横向拓展性，并且当控制器出现损坏时，将直接影响存储的正常使用。由于不同厂商设备的管理和使用方式不同，当管理接口不统一、软硬件紧耦合时，会影响存储使用的利用...
YancyYe
|
1785人阅读
...和数据处理与分析层，由此可概括的两大核心技术： ① 分布式存储 解决海量数据的存储问题 一台机器无法存储，我们就借助集群进行分布式存储 ② 分布式处理 解决海量数据的处理问题 一台机器无法高效完成数据处理，...
对于分布式存储这条企业级产品，华为早已笃定了一个方向，它应该具备承载关键业务的一切能力并臻于极致、高可靠、易运维、高性能，甚至低TCO和完善的生态兼容。10月10日，华为继续用行动来重申对这一方向的坚持。在华...
...析这两个层面。 1.4.2两大核心技术 两大核心技术指的是分布式存储、分布式处理。 分布式存储：解决海量数据的存储问题。单机无法存储海量数据时，就借助集群进行分布式存储。 分布式处理：解决海量数据的处理问题。单...
...不断地增大，其通过MySQL及磁盘基本无法满足需求，只有分布式化。 这个时候MySQL变成了HBase,检索变成了Solr/ES，再ECS提供的计算力变成了Spark。但这也会面临存储量大且存储成本高等问题。 另外一个趋势就是非结构化的数据越...
...把存放在传统ECM系统中的文件、图片、影像等内容向开放分布式平台迁移。一般来说，用户可以选择的方案根据场景与数据类型来看可以分为几类，包括HDFS方案、对象存储方案、NAS方案、以及分布式数据库方案等。 其中，HDFS方...
...面的业务部门在运行大数据项目，其目标就会转向零散的分布式物理存储架构，这些分布式物理存储是网络附加存储(NAS)，可以在工作负载需要时，向外扩展到多个存储设备。分布式向外扩展型NAS是基于云的存储或虚拟存储之外...
大数据分布式存储的部署模式：分离式or超融合数据中心内部系统的核心要求是稳定可靠，一是指系统在运行过程中有能力提供连续可靠的服务，长时间无故障运行；二是指当故障发生之后，有能力快速定位，及时排查，...
ChatGPT和Sora等AI大模型应用，将AI大模型和算力需求的热度不断带上新的台阶。哪里可以获得...
大模型的训练用4090是不合适的，但推理（inference/serving）用4090不能说合适，...
图示为GPU性能排行榜，我们可以看到所有GPU的原始相关性能图表。同时根据训练、推理能力由高到低做了...
snifes
